The Validity Concept in Medical Education: a Bibliometric Analysis / O Conceito de Validade na Educação Médica: uma Análise Bibliométrica

Abstract: Introduction: Assessment is a critical part of learning and validity is arguably its most important aspect. However, different views and beliefs led to a fragmented conception of the validity meaning, with an excessive focus on psychometric methods and scores, neglecting the consequences and utility of the test. The last decades witnessed the creation of a significant number of tests to assess different aspects of the medical profession formation, but researchers frequently limit their conclusions to the consistency of their measurements, without any further analysis on the educational and social impacts of the test. The objective of this work is to determine the predominant concept of validity in medical education assessment studies. Method: The authors conducted a bibliometric research of the literature about studies on the assessment of learning of medical students, to determine the prevalent concept of validity. The research covered a period from January 2001 to august 2019. The studies were classified in two categories based on their approach to validity: (1)" fragmented validity concept" and (2)" unified validity concept". To help with validity arguments, the studies were also classified based on Miller's framework for clinical assessment. Results: From an initial search resulting in 2823 studies, 716 studies were selected based on the eligibility criteria, and from the selected list, of which 693 (96,7%) were considered studies of the fragmented validity concept, which prioritized score results over an analysis of the test's utility, and only 23 studies (3,2%) were aligned with a unified view of validity, showing an explicit analysis of the consequences and utility of the test. Although the last decade witnessed a significant increase in the number of assessment studies, this increase was not followed by a significant change in the validity concept. Conclusions: This bibliometric analysis demonstrated that assessment studies in medical education still have a fragmented concept of validity, restricted to psychometric methods and scores. The vast majority of studies are not committed to the analysis about the utility and educational impact of an assessment policy. This restrictive view can lead to the waste of valuable time and resources related to assessment methods without significant educational consequences.

Resumo: Introdução: Avaliação é uma parte crítica da aprendizagem, e validade é sem dúvida seu aspecto mais importante. No entanto, diferentes visões e crenças levaram a uma concepção fragmentada do significado de validade, com um foco excessivo nos métodos psicométricos e escores, negligenciando a utilidade do teste. As últimas décadas testemunharam a criação de um número significativo de testes para avaliar diferentes aspectos da formação da profissão médica, mas os pesquisadores frequentemente limitam suas conclusões à consistência de suas medidas, sem nenhuma análise adicional sobre os impactos educacionais e sociais do teste. O objetivo deste trabalho é determinar o conceito predominante de validade nos estudos de avaliação em educação médica. Método: Foi realizada uma pesquisa bibliométrica da literatura de estudos sobre avaliação da aprendizagem de estudantes de Medicina para determinar o conceito prevalente de validade. A pesquisa abrangeu o período de janeiro de 2001 a agosto de 2019. Os estudos foram classificados em duas categorias: 1. "conceito de validade fragmentada" e 2. "conceito de validade unificada". Para ajudar nos argumentos de validade, os estudos também foram classificados com base na estrutura de Miller para avaliação clínica. Resultados: A partir de uma pesquisa inicial que resultou em 2.823 estudos, selecionaram-se 716 com base nos critérios de elegibilidade, e consideraram-se 693 (96,7%) estudos com conceito fragmentado de validade que priorizavam os resultados dos escores em detrimento de uma análise da utilidade do teste, e apenas 23 (3,2%) foram alinhados com uma visão unificada de validade, apresentando uma análise explícita das consequências e da utilidade do teste. Embora a última década tenha testemunhado um aumento expressivo de estudos sobre avaliação, esse crescimento não foi acompanhado por uma mudança significativa do conceito de validade. Conclusões: Esta análise bibliométrica demonstrou que os estudos sobre avaliação de aprendizagem em educação médica têm um conceito fragmentado de validade, limitados aos métodos psicométricos e escores. A grande maioria dos trabalhos não está comprometida com uma análise sobre a utilidade e o impacto educacional de uma política de avaliação. Essa visão restritiva pode levar à perda de tempo e recursos valiosos com métodos de avaliação sem consequências educacionais significativas.

Conhecimento dos pacientes diabéticos usuários do Sistema Único de Saúde acerca da retinopatia diabética / Knowledge of diabetic patients users of the Health Unic System about diabetic retinopathy

Resumo Objetivo: Avaliar o nível de conhecimento dos pacientes diabéticos, atendidos no Sistema Único de Saúde (SUS) na cidade de Boa Vista/Roraima, acerca da Retinopatia Diabética (RD). Métodos: Trata-se de um estudo transversal, descritivo, de caráter quantitativo, realizado através da aplicação de um questionário semi-estruturado para 150 indivíduos diabéticos, usuários do SUS, da cidade de Boa Vista - RR, durante o ano de 2017. As análises estatísticas foram realizadas utilizando os programas Microsoft Excel e EpiInfo 7®, fixando-se o nível de 5% para a rejeição da hipótese de nulidade. Resultados: Do total amostral pesquisado,76,7% dos indivíduos não possuía nenhum conhecimento sobre a RD, 19,3% tinha algum tipo de conhecimento, mas não possuía a patologia, 2,7% conhecia, possuía a RD e fazia tratamento e 1,3% conhecia, possuía a RD e não se tratava. Quanto a orientação, 40,6% dos participantes nunca recebeu nenhuma informação sobre o risco de perda da visão. Acerca do tipo de Diabetes, 44,7% dos participantes não sabia que tipo possuía, 42% relatou ter DM 2 e 13,3% DM1. Sobre o controle da glicose, 59,4% não conseguia mantê-lo. Foi evidenciada associação entre o controle da glicose e o conhecimento sobre RD, entre o tempo de instalação da DM e o conhecimento sobre RD e entre ter consultado um oftalmologista e conhecer sobre a RD. Conclusão: O nível de conhecimento sobre a RD é muito baixo, fator preocupante por tratar-se de uma das complicações mais importantes do Diabetes. Percebe-se que o sistema de saúde não está sendo eficiente como facilitador deste conhecimento.

Abstract Objective: To evaluate the level of knowledge of diabetic patients treated at the Unified Health System (SUS - Sistema Único de Saúde) in the city of Boa Vista / Roraima, about Diabetic Retinopathy (DR). Methods: This is a cross-sectional, descriptive, quantitative study conducted through the application of a semi-structured questionnaire for 150 diabetic individuals, SUS users, from the city of Boa Vista - RR, during the year 2017. Statistical analyzes were performed using the Microsoft Excel and EpiInfo 7® programs, setting the 5% level for the rejection of the null hypothesis. Results: Of the total sample, 76.7% of the individuals did not have any knowledge about DR, 19.3% had some type of knowledge, but did not have the pathology, 2.7% knew, had DR and was receiving treatment, 1,3% knew, had DR and was not receiving treatment. About orientation, 40.6% of the participants never received any information about the risk of vision loss. About the type of Diabetes, 44.7% of the participants did not know what type they had, 42% reported having DM 2 and 13.3% DM1. On glucose control, 59.4% could not maintain it. It was evidenced an association between glucose control and DR knowledge, between the time of DM installation and knowledge about DR, and between having consulted an ophthalmologist and knowing about DR. Conclusion: The level of knowledge about DR is very low, a worrying factor because it is one of the most important complications of diabetes. It is observed that the health system is not being efficient as facilitator of this knowledge.

Antibacterial and antifungal activity of extracts and exudates of the Amazonian medicinal tree Himatanthus articulatus (Vahl) Woodson (common name: sucuba)

Himatanthus articulatus (Vahl) Woodson is a tree found in the northern Amazon savannahs (common name: sucuba) that is used in local Amerindian medicine. Leaf, bark and branch wood methanol extracts, sequentially obtained hexane, ethyl acetate and methanol extracts and latex were evaluated for antifungal and antibacterial activities against American Type Culture Collection (ATCC) and local clinical strains using the disc diffusion method. Methanol extracts and latex inhibited Candida albicans, leaf methanol extracts inhibited Staphylococcus aureus and Bacillus subtilis and bark methanol extracts inhibited B. subtilis. Active extracts inhibited the ATCC and clinical strains. Polar antifungal and antibacterial principles in latex and extracts are thought to be responsible for the inhibition.